Charles được sinh ra tại Tours, là người con cuối cùng và con trai thứ tư của Charles VII và Marie xứ Anjou. Anh trai của ông, Dauphin Louis, đã nhiều lần xảy ra xung đột với cha mình và kể từ năm 1456 đang sống lưu vong tại tòa án Burgundy. Lúc đó, một số người dự đoán vương miện sẽ được trao cho Charles. Tuy nhiên, khi Charles VII qua đời vào năm 1461, Louis XI đã thành công và lên kế vị ngai vàng.

Sau khi lên ngôi, Louis XI đã cho em trai của mình là Duchy of Berry (công tước Berry) làm người thừa kế. Không hài lòng với điều này, Charles đã tham gia lật đổ Louis cùng Charles, Bá tước Charolais, người thừa kế Burgundian và các quý tộc mạnh mẽ khác như Francis II, Công tước xứ Bretagne trong Liên minh Weal công khai vào tháng 5 năm 1465. Điều này đã khởi đầu cho Guerre folle (Cuộc chiến điên rồ), kết thúc vào tháng 10 với Hiệp ước Conflans giữa Louis XI và Bá tước Charolais.